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(57) Abstract 

The invention relates to a device and 
method for constructing a virtual installa- 
tion model (2) as a representation of an ac- 
tual installation (1). For that purpose, the 
data base used is composed both of a set 
of digital image data (4) constituting rep- 
resentations of an actual representation (I) 
and sets of installation components (13) of 
a component library (6). The installation 
component data and the digital image data 
(4) of the actual installation (1) are evalu- 
ated by means of image analysis (5). Based 
on this evaluation, allocation of the known 
installation components (13) to the virtually 
produced installation model (2) is carried 
out The virtual representation of the actual 
installation can be used to document the ac- 
tual structure of the installation, for analysis 
of simplified disturbances, e.g. concerning 

areas with difficult access, and/or for use and observation of the installation 




relating to the components of the installation, can be stored in memory. 



Besides the geometrical data, functional data and the like, 



(57) Zusammenfassung 

Die Erfindung betrifft ein Vcrfahren und eine Vorrichtung zur Erstellung eincs virtuellen Anlagenmodells (2) als Abbild einer realen 
Anlage (1). Als Datenbasis hierfiir dienen einerseits digitale Bilddaten (4), die Abbilder einer realen Anlage (1) darstellen und andererseits 
Anlagenkomponenten (13) einer Komponentenbibliothek (6). Mittels einer Bildanalyse (5) werden die Daten der Anlagenkomponenten 
sowie die digitalen Bilddaten (4) der realen Anlage (1) ausgewertet. Anhand dieser Auswertung erfolgt eine Zuordnung der jeweils 
erkannter Anlagenkomponenten (13) zu dem virtuell erzeugten Anlagenmodell (2). Das so erzeugte virtuelle Abbild der realen Anlage kann 
der Dokumentation des tatsachlichen Aufbaus der Anlage, einer vereinfachten Storungsanalyse beispielsweise bei schwer zuganglichen 
Bereichen und/oder einer Bedien- und Beobachtung der Anlage dienen. Neben der Speicherung geometrischer Daten kflnnen zu den 
Anlagenkomponenten auch funktionelle Daten etc. gespeichert sein. 
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Beschreibung 

Vorrichtung und Verfahren zur Erstellung eines virtuellen An- 
lagenmodells 

5 

Die Erfindung betrifft eine Vorrichtung sowie ein Verfahren 
zur Erstellung eines virtuellen Anlagenmodells als Abbild 
einer realen Anlage. 

10 Bei einer derartigen realen Anlage handelt es sich beispiels- 
weise urn eine geplante bzw. eine bereits existierende Indu- 
strieanlage, urn Maschinen oder um einzelne Baugruppen dersel- 
ben. In der Praxis ist es dabei haufig der Fall, daS die rea- 
len Anlagen mit den ursprunglichen Planen der Anlage nicht 

15 iibereinstimmen, da beispielsweise bei der Erstellung der 
Anlage bereits spezielle Anpassungen oder Nachriistungen 
durchgef ilhrt worden sind bzw. deren Plane nicht die fur die 
datentechnische Weiterbearbeitung notwendigen Inf ormationen 
en thai ten. 

20 

Der Erfindung liegt die Aufgabe zugrunde, ein Verfahren und 
eine Vorrichtung zur einfachen Erstellung eines virtuellen 
Anlagenmodells als Abbild einer realen Anlage anzugeben. 

25 Diese Aufgabe wird durch eine Vorrichtung zur Erstellung ei- 
nes virtuellen Anlagenmodells als Abbild einer realen Anlage 
gelost, mit einem ersten Speicher zur Speicherung von Bildda- 
ten der realen Anlage, mit einem zweiten Speicher zur Spei- 
cherung von Inf ormationsdaten von Anlagenkomponenten einer 

30 Komponentenbibliothek, mit einem dritten Speicher zur Spei- 
cherung des virtuellen Anlagenmodells und mit einer Auswerte- 
und Steuervorrichtung zum Vergleich der Inf ormationsdaten der 
Anlagenkomponenten mit den Bilddaten der realen Anlage, zur 
Erkennung von Anlagenkomponenten in den Bilddaten, zur Ablei- 

35 tung von Annahmen iiber Komponenten in den Bilddaten und zur 
Erzeugung jeweils erkannter Anlagenkomponenten zum virtuellen 
Anlagenmodell . 
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Diese Aufgabe wird durch ein Verfahren zur Erstellung eines 
virtuellen Anlagenmodells als Abbild einer realen Anlage ge- 
ldst, bei dem das virtuelle Anlagenmodell aus Bilddaten der 
realen Anlage dadurch erzeugt wird, da£ Anlagenkomponenten 
einer Komponentenbibliothek mit den Bilddaten der realen An- 
lage verglichen werden und bei Ubereinst immung eine jeweils 
erkannte Anlagenkomponente z.um virtuellen Anlagenmodell hin- 
zugefiigt wird. 

Ausgangsbasis fur die Erstellung des virtuellen Anlagenmo- 
dells sind zwei Datenquellen. Die erste Datenquelle enthalt 
die Bilddaten von der realen Anlage. wahrend die zweite Da- 
tenquelle vordefinierte Anlagenkomponenten enthalt, die beim 
Aufbau der Anlage verwendet worden sind. Die Auswerte- und 
Steuervorrichtung ftthrt eine Bildanalyse durch, d.h. die in- 
formational! der Bilddaten und der vordef inierten Anlagenkom- 
ponenten werden gegebenenfalls unter Unterstiltzung des An- 
wenders kombiniert und ausgewertet. Sobald eine Anlagenkompo- 
nente in den Bilddaten erkannt wird, wird diese einem Abbild 
fur das virtuell erzeugte Anlagenmodell hinzugefttgt. Der An- 
wender kann sich somit basierend auf den Bilddaten far eine 
reale Anlage und mit Hilfe einer Komponentenbibliothek fur 
die verwendeten Anlagenkomponenten die reale Anlage virtuell 
nacherzeugen. Er hat hierdurch einen Uberblick iiber die aktu- 
ellen Ausriistungszustande der Anlage, der gegebenenfalls auch 
bei Anderungen der Anlage auf einen neuen Stand gebracht wer- 
den kann. 



Eine weitestgehend automatische Betriebsweise der Vorrichtung 
wird dadurch sichergestellt, dafc die Auswerte- und Steuervor- 
richtung zur Bildanalyse der Bilddaten, der Inf ormationsdaten 
der Anlagenkomponenten der Komponentenbibliothek, des aktuel- 
len Zustands des virtuellen Anlagenmodells und/oder von Zu- 
satzinformationen eines Anwenders vorgesehen ist. 

Die Bildanalyse kann vorteilhaf ter Weise derart erfolgen, daS 
die Auswertevorrichtung zur Bildanalyse von Geometrieinforma- 
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tionen der Bilddaten und/oder der Anlagenkomponenten der Kom- 
ponentenbibliothek vorgesehen ist. 

Fur eine ubersichtliche und umfassende Benutzerfuhrung sowie 
5 Bedienoberflache hat es sich als vorteilhaft erwiesen, dag 
die Vorrichtung eine Anzeigevorrichtung zur Darstellung von 
drei Sichten aufweist, wobei die erste Sicht zur Darstellung 
der auf den Bilddaten beruhenden realen Anlage, die zweite 
Sicht zur Darstellung der Informationsdaten der Anlagenkom- 
10 ponenten der Komponentenbibliothek und die dritte Sicht zur 
Darstellung des virtuellen Anlagenmodells vorgesehen sind. 

Eine vom Benutzer gesteuerte Erstellung des virtuellen Anla- 
genmodells kann auf einfache Weise dadurch erfolgen, dag die 

15 Auswerte- und Steuervorrichtung zur Steuerung des Aufbaus des 
virtuellen Anlagenmodells in der Weise vorgesehen ist, daS 
eine aus der Komponentenbibliothek ausgewahlte Anlagenkompo- 
nente zur Verschiebung in den zur Darstellung der Bilddaten 
der realen Anlage zugeordneten ersten Bildschirmbereich vor- 

20 gesehen ist. 



Eine Zuordnung der jeweiligen Anlagenkomponente zu den in den 
Bilddaten der realen Anlage enthaltenen „realen" Anlagenkom- 
ponenten erfolgt vorteilhaf ter Weise derart, dag die Auswer- 

25 te- und Steuervorrichtung die ausgewahlte und in die erste 
Sicht verschobene Anlagenkomponente unter Auswertung insbe- 
sondere von geometrischen Eigenschaf ten mit dem im Bild der 
realen Anlage erkennbaren Komponenten in Einklang bringt und 
nach erfolgreicher Detektion dieser Komponente zugeordnet 

30 wird. 

Die Erkennungssicherheit der Anlagenkomponenten kann dadurch 
weiter erhoht werden, daS der Anlagenkomponente zugeordnete 
Strukturinformationen, insbesondere geometrische und funktio- 
35 nale zur Zuordnung der Anlagenkomponenten zu den Bilddaten 
mitausgewertet werden. 
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Eine ubersichtliche und an den jeweiligen Status des Erstel- 
lungsprozesses angepaSte Ubersicht kann dadurch sicherge- 
stellt warden, daS die Auswerte- und Steue.rvorrichtung.zur 
Hinzufugung einer Anlagenkomponente nach erf olgreicher Erken- 
5 nung zur dritten Sicht des virtuellen Anlagenmodells vorge- 
sehen ist. 

Eine automatische Betriebsweise der Vorrichtung kann dadurch 
erzielt werden, da£ die Auswerte- und Steuervorrichtung zur 

10 Steuerung einer Automatikfunktion vorgesehen ist, in der au- 
tomatisch Anlagenkomponenten ausgewahlt, positioniert und ins 
Anlagenmodell hinzugefUgt werden. Die Auswahl der Anlagenkom- 
ponenten und deren Zuordnung zu den Bilddaten der realen An- 
lage bzw. deren Positionierung im virtuellen Anlagenmodell 

15 erfolgt dabei soweit erforderlich unter Berticksichtigung 
Strukturinformationen durch Generierung von Annahmen und 
Verif izierung der Annahmen durch die Auswerte- und Steuervor- 
richtung. 

20 Die Bilddatenerfassung der Bilddaten kann dadurch erfolgen, 
da£ zur Erzeugung der digitalen Bilddaten ein digitaler Foto- 
apparat, eine digitale Videokamera, digitalisierte Aufnahmen 
und/oder Daten eines CAD-Sys terns vorgesehen sind. 

25 Eine umfassende Ubersicht uber die gesamte reale Anlage wird 
dadurch erzielt, daS zur Erfassung der digitalen Bilddaten 
der realen Anlage verschiedene Ansichten von der realen An- 
lage vorgesehen sind, wobei bei Erkennung einer Anlagenkom- 
ponente die erkannte Anlagenkomponente alien Bilddaten der 

30 Anlage zugeordnet wird. 

Im folgenden wird die Erfindung anhand der in den Figuren 
dargestellten Ausf uhrungsbeispiel naher beschrieben und er- 
lautert . 

35 

Es zeigen: 
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FIG 1 ein Blockschaltbild mit einer Prinzipdarstellung 

fur eine Vorrichtung zur Erstellung eines Anlagen- 
modells , 

FIG 2 einen Bildschirmausschnitt mit einem Bildschirmbe- 

reich mit einer Digitalauf nahme einer realen 
Anlage, 

FIG 3 einen Bildschirmausschnitt mit einer ersten Sicht 

fur die reale Anlage und mit einer zweiten Sicht 
fur eine Anlagenkomponente „Tank u , 



FIG 4 einen Bildschirmausschnitt mit einer ersten Sicht 
fur die reale Anlage, mit einer zweiten Sicht fur 
15 die Anlagenkomponente „Tank" und mit einer dritten 

Sicht far ein virtuelles Anlagenmodell , 

FIG 5 einen Bildschirmausschnitt mit einer ersten Sicht 

fur die reale Anlage, mit einer zweiten Sicht fur 
20 eine Anlagenkomponente „Ventil w , 

FIG 6 einen Bildschirmausschnitt mit einer ersten Sicht 

filr die reale Anlage, mit einer zweiten Sicht fur 
die Anlagenkomponente „Ventil u und mit einer drit- 
25 ten Sicht fur die virtuellen Anlage, 

FIG 7 einen Bildschirmausschnitt mit einer ersten Sicht 

fur die reale Anlage, mit einer zweiten Sicht fur 
eine Anlagenkomponente „Rohrleitung u und mit einer 
dritten Sicht far die virtuelle Anlage, 



30 



FIG 8 einen Bildschirmausschnitt mit einer Sicht fur eine 
Anlagenkomponente „Tank w mit einer weiteren Sicht 
mit der Anlagenkomponente „Tank M zugeordneten 
35 Strukturdaten, 
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FIG 9 eines Informations-, Bedien- und Beobachtungssy- 
stems auf Basis des virtuellen Anlagenmodells und 

FIG 10 ein Ausfuhrungsbeispiel eines Datenmodells fur den 
Aufbau der Komponentenbibliothek und des virtuellen 
Anlagenmodells. 

FIG 1 zeigt ein Blockschaltbild fur eine Vorrichtung zur Er- 
stellung eines virtuellen Anlagenmodells. Das Bezugszeichen 1 
kennzeichnet eine reale Anlage. Mit Hilfe eines Bilderfas- 
sungssystems 3 werden von der realen Anlage 1 Bilder erfafit, 
die in einem Speicher 20 der Vorrichtung 22 zur Erstellung 
des virtuellen Anlagenmodells 2 gespeichert werden. Die Bild- 
daten 4, die im folgenden auch als digitale Bilddaten be- 
zeichnet werden, werden einer Auswerte- und Steuervorrichtung 
5 zugefahrt. Die Auswerte- und Steuervorrichtung 5 ver- 
arbeitet neben den Bilddaten 4 Komponentendaten 13 einer Kom- 
ponentenbibliothek 6, die in einem zweiten Speicher 21 der 
Vorrichtung 22 gespeichert sind. Der zweite Speicher 21 der 
Komponentenbibliothek 6 enthalt daruber hinaus einen Spei- 
cherteilbereich 24 zur Speicherung von Strukturinformationen 
23 der Anlagenkomponenten 6. Mittels des Pfeils 14 ist bei 
den in FIG 1 dargestellten Ausfiihrungsbeispiels symbolisiert, 
da& die Auswerte- und Steuervorrichtung 5 auch zur Verarbei- 
tung von Anwenderdaten 14 eines Anwenders 7 in der Lage ist. 
Die Ausgangsdaten 27 am Ausgang der Auswerte- und Steuervor-. 
richtung 5 dienen als Eingangsdaten fur ein virtuelles Anla- 
genmodell 2 . Ein Bildschirm 8 bildet eine Anzeigevorrichtung 
zur Darstellung der durch die Bilddaten 20 reprasentierten 
realen Anlage 1, der Anlagenkomponenten 6 ' sowie des generier- 
ten virtuellen Anlagenmodells 2. 

Zentrales Element der in FIG 1 dargestellten Vorrichtung 22 
zur Erstellung eines virtuellen Abbilds 2 der realen Anlage 1 
ist die Steuer- und Auswertevorrichtung 5. Die Steuer- und 
Auswertevorrichtung 5 fuhrt eine Bildanalyse durch, bei der 
Geomerieinformationen, welche in den digitalen Bilddaten 4 
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en thai ten sind, erkannt und in Einklang mit den in den Kompo- 
nenteninformationen 13 enthaltenen Geometrieinf ormationen 
gebracht werden. Die Bildanalyse 5 ermittelt gegebenenf alls 
anwendergesteuert mit Hilfe der Anwenderdaten 14 die Position 
5 und Ausrichtung der einzelnen Anlagenkomponenten 13 . Der An- 
wender 7 ist uber den Bildschirm 8 in jeder Phase der Erstel- 
lung uber den aktuellen Status der virtuell erstellten Anlage 
2 informiert und kann bei Bedarf in den Erstellungsprozefi un- 
terstutzend eingreifen, wie im Zusammenhang mit den Figuren 2 
10 bis 8 noch erl&utert wird. 

FIG 2 zeigt einen Bildschirmausschnitt , welcher auf dem Bild- 
schirm 8 der in FIG 1 dargestellten Vorrichtung darstellbar 
ist. In einem ersten Bildschirmbereich 9 ist dabei ein auf 

15 digitalen Bilddaten beruhendes digitales Bild 4 der realen 
Anlage gezeigt, das uber die Auswerte- und Steuervorrichtung 
an den Bildschirm 8 gelangt (vgl. FIG 1). Der Bildschirm 8 
weist daruber hinaus sogenannte Iconleisten 12a, 12b, 12c 
auf, die als Interaktions- und Bedieneroberf lache fur den 

20 Anwender dienen. Die Iconleisten enthalten jeweils Steuerele- 
mente beispielsweise zur Selektion, zum Greifen und zum Bewe- 
gen von Bilddaten und/oder Komponenten. Der rechte Bild- 
schirmbereich enthalt im oberen Bildbereich 10 ein Bild- 
schirmfenster 13, welches der Darstellung einzelner Anlagen- 

25 komponenten dient. Diese Anlagenkomponenten sind mit Hilfe 
der Iconleiste 12a auswahlbar. Der untere rechte Bildschirm- 
bereich 11 enthalt ein drittes Bildschirmf enster 15, welches 
der Darstellung der virtuellen Anlage, d.h. der Anlagenkompo- 
nenten dient, die bereits der "realen" Anlage uber Bilddaten 

30 - dargestellt im Bildschirmf enster 4 - zugeordnet sind. Dar- 
uber hinaus ist uber Steuerleisten 12c, 12d eine „Kamera- 
steuerung", d.h. eine Bewegung der in den Bildschirmbereichen 
13, 15 dargestellten Komponenten im 3D-Raum moglich. Ans telle 
oder zusatzlich zur Iconleiste 12a zur Auswahl der Komponen- 

35 ten kann auf dem Bildschirm 8 auch eine weitere eigene Sicht 
mit graphisch oder als Objekte dargestellten Komponenten vor- 
gesehen sein. 
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Der in FIG 1 dargestellte Bildschirmausschnitt wird bei- 
spielsweise nach Aufruf bestimmter digitaler Bilddaten 4 ver- 
wendet und bildet den Einstieg zur Erstellung des virtuellen 
Anlagenmodells. Bei weniger komplexen Anlagen kann der Anwen- 
der ausgehend von der im linken Bildschirmbereich dargestell- 
ten "realen" Anlage einen Automatikbetrieb starten, in wel- 
chem nacheinander die einzelnen Komponenten der Komponenten- 
bibliothek aufgerufen und die Auswerte- und Steuervorrichtung 
versucht, diese den digitalen Bilddaten 4 zuzuordnen. Die 
Auswerte- und Steuervorrichtung wertet dabei nach einem vor- 
gebbaren Suchschlussel die der jeweils zu plazierenden Kompo- 
nente zugeordneten Inf ormationsdaten aus . So kann eine erste 
Auswertung die der Komponente zugehorigen Geometriedaten, 
eine zweite Auswertung die der Komponente zugeordneten Struk- 
15 turdaten betreffen. Eine weitere Triggerung bei der Erstel- 
lung des virtuellen Anlagenmodells kann anhand der bereits 
positionierten Komponenten und den noch bestehenden Lucken 
erfolgen. So kann beispielsweise das Suchschema dadurch ein- 
gegrenzt werden, dafi im Bereich einer bereits plazierten Kom- 
ponente „Tank w , der die Inf ormationsdaten „AnschluSventil 
Position xxx" aufweist, lediglich die Komponenten mit der 
Eigenschaft „Ventil» uberpruft werden. Bei komplexeren Anla- 
genstrukturen erfolgt in der Regel zumindest teilweise ein 
manueller Betrieb, wie im Zusammenhang mit den Figuren 3 bis 
25 7 noch erlautert wird. 

FIG 3 zeigt einen Bildschirmausschnitt mit einer ersten Sicht 
fur die reale Anlage 4 und mit einer zweiten Sicht fur eine 
Anlagenkomponente eines Tanks 16a. Die virtuelle Anlagenkom- 
ponente 16a ist das virtuelle Abbild des in den digitalen 
Bilddaten 4 gezeigten realen Tanks 16b. Die Darstellung im 
Bildschirmbereich 10 wurde bei den in FIG 3 dargestellten 
Ausfuhrungsbeispiel mit Hilfe der Mentileiste 12a durch den 
Anwender durchgef uhrt . Mittels eines gestrichelt eingezeich- 
35 neten Pfeiles 17a ist symbolisiert, da£ der Anwender die vir- 
tuellen Anlagenkomponententanks 16a in den linken Bildschirm- 
bereich der digitalen Bilddaten 4 verschiebt und im Bereich 



20 



30 
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des realen Tanks 16a positioniert . Der Anwender selektiert 
somit die Anlagenkomponente in der Komponentenansicht 10 und 
zieht diese auf die Bildsicht 4 (Drag-and-Drop-Verf ahren) . 

5 FIG 4 zeigt den nachsten Schritt nach einem Fallenlassen der 
virtuellen Anlagenkomponente 16a im linken Bildschirmbereich 
der realen Anlage 4. Mit Hilfe des Teils 17b ist symboli- 
siert, da£ die virtuelle Anlagenkomponente 16a in den linken 
Bildschirmbereich gezogen wurde und im Bereich des realen 

10 Tanks 16b f allengelassen wurde. Mit Hilfe der Bildanalyse der 
Auswerte- und Steuervorrichtung wird versucht, im Umfeld die- 
ser Position die Geometrieeigenschaf ten der Anlagenkomponente 
16a mit Geometrieeigenschaf ten des Bildschirmausschnitts in 
Einklang zu bringen. Hierbei werden beispielsweise Kanten 

15 bzw. Kombinationen von Kanten ausgewertet. Nach erf olgreicher 
Auswertung wird die Anlagenkomponente 16a beziiglich Position 
und Ausrichtung den digitalen Bilddaten 4 zugeordnet und ent- 
sprechend gekennzeichnet . Gleichzeitig erfolgt im rechten un- 
teren Bildschirmausschnitt 11 eine sogenannte Instanzierung 

20 der virtuellen Anlagenkomponente 16a im virtuellen Anlagen- 
modell. Damit erscheint das virtuelle Anlagenobjekt 16a in 
der im Bildschirmbereich 11 dargestellten Anlagensicht . 

FIG 5 zeigt ein weiteres Beispiel fur eine Plazierung einer 
25 Anlagenkomponente im Bereich der digitalen Bilddaten 4. Hier- 
zu ist im rechten oberen Bildschirmbereich 10 ein Ventil 18a 
dargestellt, welches mittels der Meniileiste 12a aus der Anla- 
genkomponentenbibliothek aktiviert wurde. Mit Hilfe der Menii- 
leiste 12b wird das Ventil 18a auf der durch den Pfeil 2 6a 
30 gestrichelt gekennzeichneten Linie in Richtung des realen 
Ventils 18b gefuhrt und dort f allengelassen. 

FIG 6 zeigt das im linken Bildschirmbereich 9 fallen gelas- 
sene virtuelle Ventil 18a, wobei zusatzlich auch der bereits 
3 5 erkannte und plazierte virtuelle Tank 16a dargestellt ist. In 
der rechten unteren Bildschirmebene 11 ist die so entstehende 
virtuelle Anlagensicht, bestehend aus virtuellem Anlagentank 
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16a und virtuellem Ventil 18a dargestellt. Sofern die Posi- 
tionierung einer Anlagenkomponente nicht automatisch erfolgen 
kann, so kann die Positionierung und Ausrichtung der Anlagen- 
komponente auch vom Anwender vorgenommen werden. Hierbei wer- 
5 den im Bild analysierte Geometrieeigenschaf ten in Einklang 
mit den Geometrieeigenschaf ten der Anlagenkomponente gesetzt. 
Dadurch wird die Position und Ausrichtung der Anlagenkompo- 
nente festgelegt. Sofern die in einer Bildansicht der digi- 
talen Bilddaten 4 vorhandene Geometrieinf ormation nicht fur 
10 eine Zuordnung ausreicht, so kann versucht werden, die Zuord- 
nung der jeweiligen Anlagenkomponente uber andere Darstel- 
lungsbilder in Form digitaler Bilddaten 4 zu erzielen. 

FIG 7 zeigt als weiteres Beispiel die Zuordnung einer Rohr- 
15 leitung 19a zu den in der linken Bildansicht der digitalen 

Bilddaten 4 gezeigten realen Anlage. Im rechten unteren Bild- 
schirmausschnitt 11 ist erkennbar, welche Anlagenkomponenten 
bereits in der virtuellen Ansicht der Anlage detektiert wor- 
den sind. 

20 

FIG 8 zeigt am Beispiel einer virtuellen Anlagenkomponente 
16a, welche im rechten oberen Bildschirmausschnitt 10 darge- 
stellt ist, die Zuordnung weiterer Strukturdaten 23, welche 
im linken Bildschirmbereich dargestellt sind. Diese Struktur- 

25 daten beinhalten beispielsweise Angaben zur GroSe und zu den 
Anschlufimdglichkeiten des Tanks 16a. Die Strukturdaten 23 
konnen bei der Zuordnung des Tanks zu den digitalen Bilddaten 
mitausgewertet werden und so eine Ausrichtung und Positionie- 
rung der jeweiligen Anlagenkomponente unterstutzen . Die 

30 Strukturdaten werden dabei beispielsweise dazu verwendet, An- 
nahmen zu generieren, wie eine weitere Komponente beschaffen 
sein konnte und/oder wo eine weitere Komponente liegen konn- 
te. 

35 Damit eine effektive Funktionalitat des virtuellen Anlagenmo- 
dells erzielt wird, enthalten die einzelnen Anlagenkomponen- 
ten des Anlagenmodells einen Verweis auf die zum jeweiligen 
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Aufbau verwendeten Bilddaten. Die Anlagenkomponenten kennen 
dabei neben den Bezug zum jeweiligen Bild auch ihre jeweilige 
Position im Bild. Die Bilder, d.h. die digitalen Bilddaten 
enthalten ihrerseits Verweise auf die im Anlagenmodell 11 
5 enthaltenen Komponenten, die einen Bezug zum Bild haben. 

FIG 9 zeigt ein Informations-, Bedien- und/oder Beobachtungs- 
system 31 auf Basis des mit Hilfe der in FIG 1 dargestellten 
Vorrichtung 22 erzeugten virtuellen Anlagenmodells 2. Das 

10 Informations-, Bedien- und Beobachtungssystem 31, welches im 
folgenden abkurzend auch als B&B-System bezeichnet wird, ist 
uber einen Konverter 3 0 mit dem virtuellen Anlagenmodell 2 
gekoppelt. Uber eine bidirektionale Verbindungsleitung ist 
das B&B- System daruber hinaus mit der realen Anlage 1 gekop- 

15 pelt. Die Teile der Vorrichtung 22 zur Erzeugung des virtuel- 
len Anlagenmodells entsprechen denen des in FIG 1 dargestell- 
ten Ausfuhrungsbeispiels, so daS bezuglich der Beschreibung 
der Vorrichtung 22 und deren Bezugszeichen auf die Ausfuhrun- 
gen zu FIG 1 verwiesen wird. 

20 

Die im virtuellen Anlagenmodell 2 bzw. in den Komponenten der 
Komponentenbibliothek 6 enthaltene Information 13, 23 kann 
far unterschiedliche nachgeschaltete Systeme Verwendung fin- 
den. Beispielhaft wird hier die Verwendung fur Bedien- und 

25 Beobachtungssysteme (z.B. WinCC von Siemens) aufgezeigt. Der 
Konverter 30 extrahiert und wandelt aus dem virtuellen Anla- 
genmodell 2 die fur das Bedien- und Beobachtungssystem 31 re- 
levanten Information urn. Ein seperates Engineering des Be- 
dien- und Beobachtungssystem entfallt bzw. wird drastisch re- 

30 duziert. Das Bedien- und Beobachtungssystem 30 ist mit der 
realen Anlage 1 verbunden und ist in der Lage, den aktuellen 
Prozefizustand anzuzeigen, z.B. mit Hilfe einer auf dem virtu- 
ellen Anlagenmodell basierenden 3-dimensionalen Visualisie- 
rung. Uber die definierten Bedienelemente der Komponenten 

35 wird ein Eingriff in den Prozefi ermoglicht. 
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Weitere Systeme die auf dem virtuellen Anlagenmodell aufset- 
zen konnten sind z.B. Steuerung, Simulationssystem, Diagnose- 
system und Inf ormati oris system. 

5 Der grundlegende Vorteil einer Kopplung des virtuellen Anla- 
genmodells mit der realen Anlage 1 besteht darin, da£ die ~ 
virtuelle Anlage 2 nicht lediglich einer statischen Visuali- 
sierung und Dokumentation der Anlage 1 dient, sondern dariiber 
hinaus eine Vielzahl weiterer realer Funktionen bezuglich In- 

10 formation, Bedienen und Beobachten der realen Anlage uberneh- 
men kann. So konnen mit Hilfe des virtuellen Anlagenmodells 
2, welches ein bezuglich der definierten Funktionen exaktes 
Abbild der realen Anlage 1 darstellt, beispielsweise gefahr- 
liche Bereiche, weit entfernte Bereiche, schwer zugangliche 

15 Bereiche etc. ohne Schwierigkeiten mit exakter Visualisierung 
uberwacht werden. Anhand fiktiver Simulationsdaten sind mit 
Hilfe des virtuellen Anlagenmodells auch Simulationen bei- 
spielsweise fur Trainingszwecke moglich. 

20 FIG 10 zeigt ein Ausfiihrungsbeispiel eines Datenmodells fur 
den Aufbau der Komponentenbibliothek 6, des virtuellen Anla- 
genmodells 2 und deren Verknupfungen, wie er im Zusammenhang 
mit der in den FIG 1 und 10 dargestellten Vorrichtung 22 ver- 
wendet werden kann. Dabei werden soweit dies moglich ist die, 

25 bereits im Zusammenhang mit den FIG 1 und 9 eingefilhrten 

Bezugszeichen verwendet. In einem Bilderspeicher 20 (= erster_ 
Speicher 20 in FIG 1 und 9) werden im folgenden auch als 
Quellen bezeichnete Bilddaten 201 , z.B. digitale Bildaufnah- 
men oder CAD-Zeichnungen, und die damit verbundenen Bildin- 

30 formationen 202, 203, 204, 205 gespeichert. Die in der Quelle 
201 des Bildspeichers 20 enthaltene Information wird von der 
Auswerte- und Steuervorrichtung 5 in eine aufbereitete Quelle 
51 umgewandelt. Fur eine Quellzuordnung 52 wird mit Hilfe ei- 
ner Geometriezuordnung 54 beschrieben, welche Geometrieele- 

35 mente 53 einer Komponente 61 in Einklang mit Geometrieelemen- 
ten einer aufbereiteten Quelle gebracht werden konnten. Der 
zweiten Speicher 6 der Komponentenbibliothek enthalt vorge- 
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fertigte Komponenten, beispielsweise Tank, Ventile, Rohrlei- 
tungen, . . . (vgl. Beschreibung FIG 1 bis 9). Der dritte Spei- 
cher 2 des virtuelles Anlagenmodells enthalt sowohl die Kom- 
ponenten 61 der virtuellen Anlage, die Information uber die 
5 aufbereiteten Quellen 51, als auch die Zuordnungsinf ormation 
52 zwischen Komponenten 61 und aufbereiteten Bildern 201. ~ 

Das in FIG 10 dargestellte Datenmodell wird mit Hilfe der 
UML-Notation (Unified Modelling Language) beschrieben. Dabei 

10 besitzen die eingesetzte Notation die folgende Semantik. Eine 
sogenannte Klasse beschreibt eine Inf ormationseinheit , z.B. 
die Inf ormationseinheit Komponente. Eine Klasse kann ein oder 
mehrere Attribute besitzen, wobei die Attribute die konkreten 
Eigenschaf ten bzw. den Zustand einer Klasse bzw. Instanz 

15 festlegen (Attributwerte) . So besitzt die Klasse Strukturin- 
formation 62 das Attribut ,,+Komponententyp V Klassen konnen 
Assoziationen (Beziehungen) zu anderen Klassen bzw. zu sich 
selbst aufbauen. Eine Beziehung beschreibt, welche Zuordnun- 
gen zwischen Klassen bestehen im Sinne einer sogenannten 

20 Rolle (z.B. analysierte Komponenten) und der Kardinalitat 
(0..n -> kein, ein oder mehrere Zuordnungen) . 

Uber die Raute werden Beziehungen gekennzeichnet , die eine 
"besteht_aus" Rolle aufbauen zu einer anderen Klasse, z.B. 

25 eine Komponente besteht aus Struktur inf ormation 61, physika- 
lischem Verhalten 63, Steuerverhalten 64. Eine weitere spezi- 
elle Beziehung ist die Vererbung, die uber ein kleines Drei- 
eck am Ende einer sogenannten Superklasse gekennzeichnet ist. 
Die Vererbung beschreibt, daft Eigenschaf ten einer Subklasse 

30 von der Superklasse abgeleitet worden sind, die sie Subklasse 
somit die Eigenschaf ten der Superklasse erbt . So erben z.B. 
die Subklassen Punkt 55, Linie 56, Kurve 57 die Eigenschaf ten 
der Superklasse Geometrieelement 53. Zu den Eigenschaf ten ge- 
horen neben den Attributen auch die Beziehungen und die nicht 

35 naher beschriebenen Methoden einer Klasse. Die in FIG 10 ge- 
zeigte Datenstruktur ist in der Lage zwei unterschiedliche 
Quellen 201 zu verwenden. Beide Quelltypen (Subklassen) be- 
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schreiben eine Sicht auf eine abzubildende Anlage . Bild 202 
ist ein Quelltyp, der ein digitales Bild reprasentiert , wel- 
ches sich aus mehreren Pixel 204 zusammensetzt. CAD-Zeichnung 
203 ist ein Quelltyp, der eine CAD-Zeichnung 203 reprasen- 
5 tiert, die sich aus CAD-Elementen 205 (Linien, Polygone, Bo- 
gen, ...) zusammensetzt. 

Die in einer Quelle 201 enthaltene Information wird von der 
Auswerte- und Steuervorrichtung 5 in eine aufbereitet Quelle 

10 51 umgewandelt. Dabei werden entweder die Pixel 204 eines 

Bildes 202 bzw. die CAD-Elemente 205 einer CAD-Zeichnung 203 
in Geometrieelemente 53 (z.B. Punkt 55, Linie 56, Kurve 57, 
... 58) umgesetzt. Auf Basis der Geometrieelemente 53 kann 
die Auswerte- und Steuervorrichtung 5 versuchen, ausgewahlte 

15 Komponenten 61 einer aufbereiteten Quelle 51 zuzuordnen. 

Die Auswerte- und Steuervorrichtung versucht - automatisch 
Oder in Interaktion mit dem Anwender - Komponenten in aufbe- 
reiteten Quellen 51 - Bilder 202 oder CAD-Zeichnungen 203 - 
20 zu identif izieren und dem virtuellen Anlagenmodell 2 hinzuzu- 
fugen. Diese Zuordnung erfolgt auf Basis der Geometrieelemen- 
te 53, die in einer aufbereiteten Quelle 51 analysiert wurden 
bzw. den Komponenten 61 iiber die Geometrieeigenschaf ten 68 
zugeordnet sind. 

25 

Konnte eine Komponente 61 einer aufbereiteten Quelle 51 zuge- 
ordnet werden, so wird diese Information in der Quellzuord- 
nung 52 hinterlegt. Die Que 11 zuordnung 52 beschreibt, welche 
analysierten Komponenten 61 welchen Quellen 201 zugeordnet 
30 werden konnen. Dabei kann eine Komponente 61 iiber mehreren 
Quellzuordnungen 52 unterschiedlichen Quellen 201 zugeordnet 
sein . 

Mit Hilfe mehreren Geometriezuordnung 54 wird fur eine Quell- 
35 zuordnung 52 beschrieben, welche Geometrieelemente 53 einer 
Komponente in Einklang mit Geometrieelemenenten 53 einer auf- 
bereiteten Quelle 51 gebracht werden konnten. 
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Das virtuelle Anlagenmodell 2 besteht aus den Komponenten, 
die bereits analysiert werden konnten. Die Inf ormationen des 
virtuelle Anlagenmodells 2 bzw. der in ihm enthaltenen Kompo- 
nenten 61 werden von unterschiedlichen nachgeschalteten Sy- 
stemen, z.B. Bedien- und Beobachtungssystem genutzt. 

Zusammenfassend betrifft die Erfindung somit ein Verfahren 
und eine Vorrichtung zur Erstellung eines virtuellen Anla- 
genmodells als Abbild einer realen Anlage. Als Datenbasis 
hierfur dienen einerseits digitale Bilddaten, die Abbilder 
einer realen Anlage darstellen und andererseits Anlagenkompo- 
nenten einer Komponentenbibliothek. Mittels einer Bildanalyse 
werden die Daten der Anlagenkomponenten sowie die digitalen 
Bilddaten der realen Anlage ausgewertet. Anhand dieser Aus- 
wertung erfolgt eine Zuordnung der jeweils erkannter Anlagen- 
komponenten zu dem virtuell erzeugten Anlagenmodell. Das so 
erzeugte virtuelle Abbild der realen Anlage dient der Doku- 
mentation des tatsachlichen Aufbaus der Anlage sowie einer 
vereinfachten Storungsanalyse in einem Storungsfall . Neben 
der Speicherung geometrischer Daten kdnnen zu den Anlagenkom- 
ponenten auch funktionelle Daten etc. gespeichert sein. 
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Patentanspruche 



1. Vorrichtung (22) zur Erstellung eines virtuellen Anlagen- 
modells (2) als Abbild einer realen Anlage (1, , mit einem er _ 
sten Speicher (20) zur Speicherung von Bilddaten (4) der 
realen Anlage (1), mit einem zweiten Speicher (21) zur Sp'ei 
cherung von Inf ormationsdaten (13, 23) von Anlagenkomponenten 
(13) einer Komponentenbibliothek (6), mit einem dritten 
Speicher (28) zur Speicherung des virtuellen Anlagenmodells 
(2) und mit einer Auswerte- und Steuervorrichtung (5) zum 
Vergleichder Inf ormationsdaten (13, 23) der Anlagenkompo- 
nenten (13) mit den Bilddaten (4) der realen Anlage (1) zur 
Erkennung von Anlagenkomponenten (13) in den Bilddaten (4) 
zur Ableitung von Annahmen uber Komponenten in den Bilddaten 
und zur Erzeugung jeweils erkannter Anlagenkomponenten (13) 
im virtuellen Anlagenmodell (2). 

2. Vorrichtung nach Anspruch 1, 
dadurch gekennzeichnet, 

dag die Auswerte- und Steuervorrichtung (5) zur Bildanalyse 
der Bilddaten (4), der Inf ormationsdaten der Anlagenkompo- 
nenten (13) der Komponentenbibliothek (6), des aktuellen 
Zustands des virtuellen Anlagenmodells (2), des aktuellen 
Zustands des virtuellen Anlagenmodells und/oder von Zusatz- 
mformationen (14) eines Anwenders vorgesehen ist. 

3 . Vorrichtung nach einem der AnsprUche 1 oder 2 , 
dadurch gekennzeichnet, 

daS die Auswertevorrichtung (5) zur Bildanalyse (5) von Geo- 
metrxeinformationen der Bilddaten (4, und/oder der Anlagen- 
komponenten (13) der Komponentenbibliothek (6) vorgesehen 
ist . 



4 



Vorrichtung nach einem der Anspriiche 1 bis 3 , 



35 dadurch gekennzeichne 



t, 

daS die Vorrichtung eine Anzeigevorrichtung (8) zur Darstel- 
lung von drei Sichten (9, 10, 11, aufweist, wobei die erste 
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Sicht (9) zur Darstellung der auf den Bilddaten (4) beruhen- 
den realen Anlage, die zweite Sicht (10) zur Darstellung der 
Informational ten (13, 23) der Anlagenkomponenten (13) der 
Komponentenbibliothek (6) und die dritte Sicht (11) zur Dar- 
stellung des virtuellen Anlagenmodells (2) vorgesehen sind. 

5. Vorrichtung nach einem der Ansprtiche 1 bis 4, 
dadurch gekennzeichnet, 

daS die Auswerte- und Steuervorrichtung (5) zur Steuerung des 
Aufbaus des virtuellen Anlagenmodells (2) in der Weise vorge- 
sehen ist, daS eine aus der Komponentenbibliothek (6) ausge- 
wahlte Anlagenkomponente (13) zur Verschiebung in den zur 
Darstellung der Bilddaten (4) der realen Anlage (1) zugeord- 
neten ersten Bildschirmbereich (9) vorgesehen ist. 

6. Vorrichtung nach einem der Ansprtiche 1 bis 5, 
dadurch gekennzeichnet, 

daE die Auswerte- und Steuervorrichtung (5) 'die ausgewahlte 
und in den ersten verschobenen Anlagenkomponente unter Aus- 
wertung insbesondere von geometrischen Eigenschaf ten mit dem 
xm Bild der realen Anlage erkennbaren Komponenten in Einklang 
brxngt und nach erf olgreicher Detektion dieser Komponente zu- 
geordnet wird. 



25 



30 



35 



7. Vorrichtung nach einem der Ansprtiche 1 bis 6, 
dadurch gekennzeichnet, 

da6 der Anlagenkomponente (13) zugeordnete Strukturinf orma- 
tionen (23), insbesondere geometrische und funktionale infor- 
mations zur Zuordnung der Anlagenkomponenten (13) zu den 
Bilddaten (4) mitausgewertet werden. 

8. Vorrichtung nach einem der Ansprtiche 1 bis 7, 
dadurch gekennzeichnet, 

daS die Auswerte- und Steuervorrichtung (5) zur Hinzufugung 
einer Anlagenkomponente (13) nach erf olgreicher Erkennung zur 
dritten Sicht (11) des virtuellen Anlagenmodells (2) vorgese- 
hen ist. 
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9. Vorrichtung nach einem der Anspriiche 1 bis 8, 
dadurch gekennzeichnet, 

dafi die Auswerte- und Steuervorrichtung (5) zur Steuerung 
einer Automatikfunktion vorgesehen ist, in der automatisch 
Anlagenkomponenten ausgewahlt, positioniert und ins Anlagen- 
modell (2) hinzugefiigt werden. 

10. Vorrichtung nach einem der Anspruche 1 bis 9, 
dadurch gekennzeichnet, 

daS zur Erzeugung der Bilddaten (4) ein digitaler Fotoappa- 
rat, eine digitale Videokamera, digitalisierte Aufnahmen 
und/ Oder Daten eines CAD- Systems vorgesehen sind. 

11. Vorrichtung nach einem der Anspruche 1 bis 10, 
dadurch gekennzeichnet, 

dag zur Erfassung der Bilddaten (4) der realen Anlage (1) 
verschiedene Ansichten von der realen Anlage (1) vorgesehen 
sind. 



12. Verfahren zur Erstellung eines virtuellen Anlagenmodells 
(2.) als Abbild einer realen Anlage (1), bei dem das virtuelle 
Anlagenmodell (2) aus Bilddaten (4) der realen Anlage (1) da- 
durch erzeugt wird, daS Inf ormationsdaten (13, 23) von Anla- 
genkomponenten (13) einer Komponentenbibliothek (6) mit den 
Bilddaten (4) der realen Anlage (1) verglichen werden und bei 
Ubereinstimmung eine jeweils erkannte Anlagenkomponente (13). 
zum virtuellen Anlagenmodell (2) hinzugefiigt wird. 

13. Verfahren nach Anspruch 12, 
dadurch gekennzeichnet, 

daS die Bilddaten (4) und die Daten der Anlagenkomponenten 
(13) der Komponentenbibliothek (6) einer Bildanalyse (5) un- 
terzogen werden, bei der die Informationen der Bilddaten (4), 
der Anlagenkomponenten (13) und/oder Informationen (14) eines 
Anwenders (7) ausgewertet werden. 
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14. Verfahren nach einem der Anspruche 12 oder 13, 
dadurch gekennzeichnet, 

da£ bei der Bildanalyse (5) Geometrieinf ormationen der Bild- 
daten (4) und/oder der Anlagenkomponenten (13) der Komponen- 
5 tenbibliothek (6) ausgewertet werden. 

15. Verfahren nach einem der Anspruche 12 bis 14, 
dadurch gekennzeichnet, 

da£ bei der Erstellung des virtuellen Anlagenmodells (2) auf 
10 einer Anzeigevorrichtung (8) drei Sichten (9, 10, 11) darge- 
stellt werden, wobei die erste Sicht (9) zur Darstellung der 
Bilddaten (4) der realen Anlage, die zweite Sicht (10) zur 
Darstellung der Anlagenkomponenten (13) der Komponen tenbi- 
bliothek (6) und die dritte Sicht (11) zur Darstellung des 
15 virtuellen Anlagenmodells (2) vorgesehen sind. 

16. Verfahren nach einem der Anspruche 12 bis 15, 
dadurch gekennzeichnet, 

daS zum Aufbau des virtuellen Anlagenmodells (2) aus der Kom- 
20 ponentenbibliothek (6) eine Anlagenkomponente (13) ausgewahlt 
wird, daS die ausgewahlte Anlagenkomponente (13) in den Bild- 
schirmbereich (9), der der Darstellung der realen Anlage zu- 
geordnet ist, verschoben wird. 

25 17. Verfahren nach einem der Anspruche 12 bis 16, 
dadurch gekennzeichnet, 
daS die Bildanalyse (5) die verschobene Anlagenkomponente 
(16a) unter Auswertung insbesondere von geometrischen Eigen- 
schaften mit einer im Bild der realen Anlage (1) erkennbaren 

30 Komponente (16b) in Einklang bringt und nach erf olgreicher 
Detektion diese Komponenten einander zugeordnet werden. 

18. Verfahren nach einem der Anspruche 12 bis 17, 
dadurch gekennzeichnet, 
35 daS der virtuellen Anlagenkomponente (16a) Strukturinf orma- 
tionen (23) zugeordnet sind, die zur Zuordnung der Anlagen- 
komponenten (13) zu den Bilddaten (4) mitausgewertet werden. 
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19. Verfahren nach einem der Anspruche 12 bis 18, 
dadurch gekennzeichnet, 

da£ nach erf olgreicher Erkennung einer Komponente die erkan-n- 
te Komponente in der dritten Sicht (11) des virtuellen Anla- 
genmodells (2) hinzugefugt wird. 

20. Verfahren nach einem der AnsprQche 12 bis 19, 
dadurch gekennzeichnet, 
dafi das Verfahren eine automatische Bildanalyse aufweist, in 

10 der automatisch Anlagenkomponenten ausgewahlt, positioniert 
und ausgewahlt werden. 

21. Verfahren nach einem der Anspruche 12 bis 20, 
dadurch gekennzeichnet, 

15 dafi die Bilddaten (4) mittels eines digitalen Fotoapparats , 
mittels einer digitalen Videokamera, mittels digitalisierter 
Aufnahmen und/oder mittels Daten eines CAD-Systems erzeugt 
werden . 
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20 22. Verfahren nach einem der Anspruche 12 bis 21, 
dadurch gekennzeichnet, 
daS Bilddaten (4) verschiedener Ansichten der realen Anlage 
verwendet werden, wobei bei erf olgreicher Erkennung einer An- 
lagenkomponente (13) eine automatische Zuordnung der erkann- 

25 ten Anlagenkomponente (13) zu den Bilddaten der verschiedenen 
Ansichten erfolgt. 
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